任務完成!你已掌握人工智能語言的基本單元!不太對喔!我們來重新組合一下這個序列吧!知識上傳:分詞與序列……是……嗎??……還是……?
我們如何稱呼人工智能閱讀時所使用的微小基本單位?
答對了!分詞是像「apple」、「ing」或「?」這樣的小單位,它們構成了人工智能的語言。
電腦如何表示一個分詞,讓自己能夠理解它?
正確!電腦只懂數字,因此每個分詞都會有獨一無二的識別編號。
如果我們擁有「friend」和「ship」的分詞,當這些分詞轉換成數字列表時,「friendship」這個詞被稱為什麼?
太棒了!由分詞數字按順序排列而成的列表就稱為序列。
為什麼序列中分詞的順序如此重要?
沒錯!相同的分詞若順序不同,整個句子的意思就會完全不同。
人工智能一次能處理多少個分詞有什麼限制?
答對了!上下文視窗就是人工智能在對話過程中能「記住」多少資訊的界限。
一個標點符號,例如句號(.),可以是一個分詞嗎?
沒錯!分詞可以是完整單字、單字的一部分,甚至是標點符號。一切都是一塊積木!
1
分詞與序列
EvoClass-AI004第4講
0
🤖 嘀嘀!歡迎,見習官!請選擇下方的子主題,了解人工智能如何透過分詞來「閱讀」。
Py-機器人指令即時
嘀嘀! 見習官你好!要教人工智能閱讀,我們首先得把文字切成小小的「樂高」積木。準備好學習電腦如何將文字轉化為數字嗎?
主題進度0%
選得好!分詞就像樂高積木一樣。像「friendship」這樣的字會被拆分成「friend」和「ship」等更小的部分。連一個簡單的「.」也是分詞!對人工智能來說,這些碎片比整段長句子更容易處理。
1
子主題1
什麼是分詞?
將文字切割成像「friend」和「ship」這樣的微小積木。
看這裡!有了分詞後,人工智能會給每一個分詞一個秘密的編號。這些編號組成了一個「序列」。記得:順序很重要!「The dog bit the man」和「The man bit the dog」使用的是相同的積木,但序列卻講述了截然不同的故事!
2
子主題2
序列的力量
將積木轉化為一個數學上的列表,其中順序至關重要。
你知道嗎?人工智能有一個「上下文視窗」,就像它的手掌大小一樣。它只能同時在「腦中」記住一定數量的分詞,一旦超過就會開始忘記最前面的部分!
你知道嗎?
人工智能有一個「上下文視窗」,就像它的手掌大小一樣。它只能同時在「腦中」記住一定數量的分詞,一旦超過就會開始忘記最前面的部分!
載入中...
⭐⭐⭐

任務完成!

你已經是分詞大師了!